Go 实现分布式爬虫系统

过去的十多年间，互联网行业迅猛发展，大数据、大规模集群计算、复杂的网络环境……各种新的挑战让人应接不暇。面对这些问题，一些早已发展成熟的语言显示出些许笨重和疲态，也就是在这一语境下，Go 语言应运而生。

Go 语言被称作是“云计算时代的 C 语言”，它专注于软件开发过程本身，简洁、易上手，且天生支持高并发编程。因此，也在众多编程语言中日益显示出其竞争力，市场需求有增无减。

然而，就是在这个崭新的赛道上，想要进阶成为 Go 高级工程师也并非易事。你可能有过这样的困惑：

• 疲于应付需求，程序缺乏设计，代码也不规范，最终导致程序越来越难扩展和维护；

• 不懂 Go 语法背后的运行机制，也不知道如何提升，无法解决复杂的系统问题；

• 难以跳出开发，从上层视角思考系统的技术选型与架构设计；

• 没有大规模云原生、分布式系统、微服务集群的实战经验，且缺乏学习路径。

为了解决这些问题，我们请到了深耕 Go 领域的郑建勋老师。他有着丰富的大规模云原生、分布式、微服务集群实战经验。

这门课程，他会把零碎的知识点串联起来，形成 Go 语言和系统设计的完整知识体系与方法论。然后理论融合实践，带你一起完成一个具备扩展性、高并发、分布式、微服务的复杂系统：

课程特色

课程主要有五大特色。

特色一：在“玩”中学，爬虫为基座

专栏以爬虫项目贯穿始终，从需求拆解和架构设计开始，带你独立完成能够支撑海量爬虫任务的高并发系统、具有故障容错能力的分布式系统、具备可扩展性和领域驱动的微服务系统。

特色二：谋定而动，写出“好”代码

专栏不只是讲解如何写代码，还会给出一流团队的编码规范与扫描工具。让我们摆脱过去的思维定势，摆脱疲于应付需求的现状，写出简洁、高效、健壮和可扩展的代码。

特色三：“深”入原理，理论结合实践

专栏在项目开发过程中，会融入底层原理知识，结合实践告诉你为什么代码要这样写，它背后的机制是怎样的。让你不仅知其然，也能够知其所以然。

特色四：硬核实战，“调”试复杂问题

专栏会为你总结出系统的性能分析方法论，并结合实战案例，手把手教你调试代码，定位线上复杂问题。并有节约了线上千台容器的性能分析实战案例。

特色五：不畏浮云遮望眼，掌“控”更大规模系统

此外，专栏还会跳出开发单一程序的狭隘视角，为你系统介绍大型互联网产品的整个生命周期。介绍大规模微服务集群的典型架构，深入探讨微服务协议、架构、治理等问题。

课程目录

适合人群

• 初学者与进阶学者，掌握了基本语法或完成了简单项目，渴望进一步提升 Go 语言与项目技能。

• 希望收获大型 Go 项目完整开发流程经验的开发者和面试者，也可能是学生和面试者，希望能够理论结合实际，更加从容地参加面试，冲击更高的薪资。

• 跨语言 Python、 PHP 或者 Java 希望转 Go 的开发者，之前有项目经验，但是不了解 Go 语言的生态、工具、开发模式，希望快速掌握 Go 语言项目开发。

• 有实际爬虫需求的企业开发者，希望直接使用本课程中交付的项目。